Năm 207 TCN, Hạng Vũ cầm đầu quân Sở đi cứu Triệu. Quân Sở mấy lần cắt đứt đường ống vận lương của Chương Hàm cho Vương Ly. Quân của Vương Ly thiếu ăn. Hạng Vũ đem tất cả binh sĩ vượt sông Hoàng Hà và phá tan quân Vương Ly, cầm tù được Vương Ly, còn Thiệp Nhàn tự sát. Chương Hàm bèn đem binh chạy. Nhờ vậy Triệu Vương Yết và Trương Nhĩ mới ra khỏi thành Cự Lộc, cảm tạ chư hầu.

Trương Nhĩ gặp Trần Dư, trách Trần Dư không chịu cứu thành Cự Lộc. Đến khi hỏi Trương Yêm, Trần Thích ở đâu, Trần Dư nổi giận nói:

Trương Yêm, Trần Thích bảo tôi thế nào cũng phải chết, nên tôi sai họ cầm năm nghìn quân để thử sức quân Tần trước. Họ đều chết không thể ra được.

Trương Nhĩ không tin, cho rằng Trần Dư đã giết họ, nên hỏi Trần Dư mấy lần. Trần Dư nổi giận nói:

Tôi không ngờ ông oán giận tôi sâu sắc đến thế. Có phải vì tôi tiếc không dám bỏ chức tướng quân đâu?

Trần Dư bèn cởi ấn trao cho Trương Nhĩ. Trương Nhĩ cũng kinh ngạc không dám nhận. Trần Dư đứng dậy đi ra nhà tiêu, có người khách nói với Trương Nhĩ:

Tôi nghe nói: "Trời cho mà không nhận thì sẽ mang vạ", nay Trần tướng quân đã trao ấn cho ngài mà ngài không nhận thì trời sẽ bắt mang vạ đấy. Xin ngài nhận ngay đi!

Trương Nhĩ bèn mang ấn, thu bộ hạ của Trần Dư. Trần Dư oán ông trách mình vô cớ và không chịu nhường, bèn rảo bước đi ra. Trương Nhĩ bèn thu quân của Trần Dư.

Trần Dư một mình cùng với vài trăm người trước đây ở dưới cờ vẫn quen thân, đi săn và đánh cá trong cái đầm trên sông Hoàng Hà. Từ đó giữa Trương Nhĩ và Trần Dư có sự hiềm khích.